Open AI DevDay

https://www.youtube.com/watch?v=U9mJuUkhUzk

"We hope that you'll come back next year. What we launch today is going to look very quaint relative to what we're busy creating for you now."

来年もまたお越しいただければ幸いです。私たちが今日発表したものは、私たちが忙しく作成しているものと比較すると、非常に趣のあるものになるでしょう。

ひょえ～～yosider.iconnomadoor.icon

https://openai.com/blog/new-models-and-developer-products-announced-at-devdayNew models and developer products announced at DevDay

GPT-4 Turbo

コンテキスト長が(32kから)128k

API

GPT-4 fine-tuning

Custom Models

2x tokens/min

価格(GPT-4より2.75倍安い)

1¢/1000 input tokens

3¢/1000 output tokens

わーい基素.iconyosider.icon

使いたいtakker.icon

GPT-3.5 16k

0.003$/1000 input tokens(4倍安い)

0.006$/1000 output tokens(2.7倍安い)

ChatGPT

All Tools

GPTs

企業、個人がカスタムしたChatGPT

FLOWGPT的な？

GPT Builder

GPTsを構築する

GPT Store

GPTsの売買？プラットフォーム

ここにscrapboxとの連携機能を作ってupするのもよさそうtakker.icon

【誰でも簡単】GPT の作り方｜ChatGPT研究所

ノーコードの極みみたいになっててすげーwogikaze.icon

Assistants API

Whisper V3

Consistency Decoder

New GPT-4 Turbo(gpt-4-1106-preview):

128Kのコンテキスト・ウィンドウと2023年4月までの世界の出来事に関する知識を提供します。

価格を大幅に引き下げ

入力トークンは0.01ドル/1K、出力トークンは0.03ドル/1K

以前のGPT-4の価格と比べてそれぞれ3倍、2倍安くなりました。

関数の呼び出し(Function Calling)が改善

1つのメッセージで複数の関数を呼び出す機能

JSONモードで常に有効な関数を返す機能

正しい関数パラメータを返す精度の向上

再現性の向上

Updated GPT-3.5 Turbo(gpt-3.5-turbo-1106):

デフォルトで16Kコンテキスト

4倍長いコンテキストが低価格で利用可能です: $0.001/1K入力、$0.002/1K出力

16Kモデルのファインチューニングが可能

ファインチューニングされたGPT-3.5は、入力トークンの価格が75%下がって$0.003/1Kに、出力トークンの価格が62%下がって$0.006/1Kになります。

GPT-4 Turbo同様のFunction Calling改善

Assistants API(ベータ版)

開発者がスレッドの状態管理をOpenAIに譲り、コンテキストウィンドウの制約を回避するための永続的なスレッドを持っています。また、コードインタープリタ、検索、関数呼び出しのような新しいツールも使用できます。

Assistants have persistent Threads for developers to hand off thread state management to OpenAI and work around context window constraints. They can also use new tools like Code Interpreter, Retrieval, and Function Calling.

自分で使ってみないと説明だけ見てもよくわからんなnishio.icon基素.icon

Assistants API の解説と動作確認（Google Colab）｜ぬこぬこ

試した(後半) /nishio/OpenAI DevDay Keynotenishio.icon

マルチモーダル機能(gpt-4-vision-preview)：

GPT-4 Turboは Chat Completion APIで画像入力をサポートした

キャプション生成や画像分析などのユースケースを可能にしました

このビジョン機能は、今年中に製品版に統合される予定

画像生成 API: 画像生成用の DALL-E 3 をアプリケーションに統合できる

新しく導入されたTTSモデルによるテキスト読み上げ機能

Cevioボイスとかで読み上げたいtakker.icon

使ってみた系記事

OpenAIのgpt-4-vision-previewに画像を投げてどんなことをしてくれるのか試してみた｜ねぎぽよし

これは何の画像？

この状況で気をつけるべきことは何？

NSFW画像

サイゼリヤの間違い探し

この料理はなんですか？

写真の場所はどこ？

キャラクターの名前を教えて

ChatGPTでカスタマイズ可能なGPTs：

GPTsは、ChatGPTのカスタマイズバージョンに命令、データ、機能を組み合わせたものです。

DALL-Eや高度なデータ解析のようなOpenAIによって構築された機能に加えて、GPTは開発者が定義したアクションも呼び出すことができます。GPTは、開発者が経験の大部分をコントロールできるようにします。我々は意図的にプラグインとアクションを非常に似たように設計しており、既存のプラグインをアクションに変えるのに数分しかかかりません。詳しくはドキュメントをお読みください。

ChatGPT Pluginsの発展的バージョンなわけかnishio.icon

For example, GPTs can help you learn the rules to any board game, help teach your kids math, or design stickers.

https://help.openai.com/en/articles/6825453-chatgpt-release-notes

https://openai.com/chatgpt#do-more-with-gpts で確認できる

https://gyazo.com/008e0dc81fa0cff8b4d286948d5f1b31

まだ使えなかった基素.icon

DALLE-3のサイレントアップデート？

https://gyazo.com/90016f573c6e1c000a69e1dc4a7ee7c3若干性能が上がってる気がする

イラスト上手くなったという感想を聞いたnishio.icon

benparr .

@openAI

has put in a lot of work into RAG (retrieval augmented generation).